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(57) Abstract 

The inventive device consists of a stereoscopic image recording 
device with at least one optical sensor (3, 4) which records the scene 
of the vehicle seat (2) and derives a relief map from said scene. Said 
relief map is subdivided into several zones and indicates the distance 
between said zones and a point of reference. At least one optical 
sensor (3, 4) has a non-linear converter characteristic value which 
describes the correlation between the incident light intensity (L) and 
its electric starting signal (U, I) in order to reliably indicate whether 
the seat is occupied even at high light intensity variations. The curve 
of said converter characteristic value decreases as the light intensity 
(L) increases. 

(57) Zusammenfassung 

Die Vorrichtung besteht aus einer stereoskopischen Bildaufnah- 
meeinrichtung mit mindestens einem optischen Sensor (3, 4), welche 
die Szene des Fahrzeugsitzes (2) aufhimmt und daraus eine in mehrere 
Zonen aufgeteilte Tiefenkarte ableitet, die fur jede Zone den Abstand 
gegenttber einem Referenzpunkt angibt. Damit auch bei hoheri Licht- 
intensitatsschwankungen eine zuverlassige Sitzbelegungserkennung 
mSglich ist, weist der mindestens eine optische Sensor (3, 4) eine 
den Zusammenhang zwischen der einfallenden Lichtstarke (L) und 
seinem elektrischen Ausgangssignal (U, \) beschreibende, nichdineare 
Wandlerkennlinie auf, deren Kennliniensteilheit mit zunehmender 
Lichtstarke (L) abnimmt. 
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VORRICHTUNG ZUM ERF AS SEN DER BELEGUNG EINES FAHRZEUGSITZES MITTELS EINES STERE- 
OSKOPISCHEN BILDAUFNAHMESENSORS 



Stand der Technik 

Die vorliegende Erfindung betrifft eine Vorrichtung zum Er- 
fassen der Belegung eines Fahrzeugsitzes , wobei eine ste- 
reoskopische Bildauf nahmeeinrichtung mit mindestens einem 
optischen Sensor die Szene des Fahrzeugsitzes aufnimmt und 
daraus eine in mehrere Zonen aufgeteilte Tiefenkarte ablei- 
tet, die fur jede Zone den Abstand gegenuber einem Refe- 
renzpunkt angibt . 

Untersuchungen, z . B . durch die NHTSA (National Highway 
Trafic Safety Administration) in den U.S.A. . haben ergeben, 
dafi Kinder, die auf dem Beif ahrersitz des Fahrzeugs 
insbesondere in einem riickwarts gerichteten Kindersitz sa- 
Sen. durch Auslosen des Airbags todliche Verletzungen 
erlitten haben. Uberhaupt geht von einem auslosenden Airbag 
eine Verletzungsgef ahr fur eine Person auf einem 
Fahrzeugsitz aus, wenn diese auf Grund ihrer Sitzposition 
Oder ihrer KorpergroSe oder durch Vorbeugen unmittelbar vor 
Eintritt des Unfalls in Richtung des Airbags einen zu 
geringen Abstand zu dem Airbag hat. Es gibt 
Belegungssituationen gerade des Beif ahrersitzes , in denen 
der Airbag besser gar nicht ausgeldst werden sollte. Zu 
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solchen Belegungssituationen gehort z. B. die Belegung des 
Fahrzeugsitzes mit einem Kindersitz oder die Ablage von 
nicht zu schiltzenden Gegenstanden oder ein viel zu geringer 
Abstand eines Insassen gegeniiber dem Airbag. Zukunftig 
eingesetzte intelligente Airbagsysteme sollen in der Lage 
sein, die Auf blasstarke des Airbags an die Gr6£e und die 
Sitzposition des jeweiligen Fahrzeuginsassen anzupassen. 

Es zeigt sicb also, da£ es fur die Auslosesteuemng des 
Airbags unumganglich ist, die Belegung des Fahrzeugsitzes zu 
erfassen, urn ein unnutzes oder ein die Person auf dem 
Fahrzeugsitz gefahrdendes Auslosen des Airbags zu vermeiden. 
Es gibt bereits verschiedenartige Vorrichtungen zur 
Sitzbelegungserkennung. Eine einleitend dargelegte Vorrich- 
tung zum Erfassen der Belegung eines Fahrzeugsitzes mit ei- 
nem stereoskopischen Bildauf nahmesystem ist aus der DE 197 
41 393 Al bekannt. Mit einer solchen stereoskopischen Bild- 
auf nahmeeinrichtung konnen mit Hilfe des bekannten Triangu- 
lationverf ahrens Abstande des nach Zonen aufgeteilten Fahr- 
zeugsitzbereiches gegeniiber einem Ref erenzpunkt ermittelt 
werden. Es entsteht dabei eine sogenannte aus mehreren Zonen 
bestehende Tief enkarte, aus der sich mit hoher Genauigkeit 
ablesen laSt , ob und wie der Fahrzeugsitz belegt ist oder 
welche Sitzposition ein darauf befindlicher Fahrzeuginsasse 
momentan eingenommen hat. Diese Information kann nun zur 
Steuerung von Ruckhalteeinrichtungen, wie Airbags oder 
Gurtstraf f er , eingesetzt werden. 

Die Genauigkeit einer von einer Bildauf nahmeeinrichtung er- 
stellten Tiefenkarte hangt sehr stark von der Bildauf nahme- 
qualitat der optischen Sensoren ab. Auf die Bildgualitat 
haben die Szenenbeleuchtungsverhaltnisse einen starken 
EinfluE. Gerade im Kraf tf ahrzeug treten sehr extreme Be- 
leuchtimgsverha\Ltnisse auf. Dies liegt zum einen daran, da£ 
sich das Kraf tf ahrzeug in freier Umgebung befindet. Somit 
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sind unterschiedlichste Beleuchtungsverhaltnisse moglich - 
Tag, Nacht, tiefstehende und blendende Sonne, blendende 
Scheinwerfer anderer Fahrzeuge etc. . Aufierdem kann sich ein 
Fahrzeug sehr schnell bewegen, so daS sich die 
Beleuchtungsverhaltnisse in sehr kurzen Zeitraumen stark 
andern (z. B. beim Einfahren in einen abgeschatteten 
Bereich, beim Verlassen eines Tunnels und dergleichen) . 
Lineare optische Sensoren, .wie sie gemafc der DE 197 41 3 93 
Al fur die Sitzbelegungserkennung eingesetzt werden, zeigen 
eine sehr grofie Abhangigkeit von Helligkeitsveranderungen 
der aufgenommenen Szene. Urn die im Fahrzeug auftretende hohe 
Helligkeitsdynamik moglichst weitgehend zu reduzieren, ist 
gemaS der DE 197 41 3 93 Al eine starke Lichtquelle zur 
Beleuchtung der betrachteten Szene erf orderlich. 

Der Erfindung liegt nun die Aufgabe zugrunde, eine Vor- 
richtung der eingangs genannten Art anzugeben, die trotz 
hoher Helligkeitsdynamik auch ohne Einsatz einer sehr 
starken Lichtquelle die Art der Belegung eines 
Fahrzeugsitzes zuverlassig erf a&t . 

Vorteile der Erfindung 

Die genannte Aufgabe wird mit den Merkmalen des Anspruchs 1 
dadurch gelost, da£ der mindestens eine optische Sensor, aus 
dem die stereokopische Bildauf nahmeeinrichtung besteht, eine 
den Zusammenhang zwischen der einfallenden Lichtstarke und 
seinem elektrischen Ausgangssignal beschreibende , nicht 
lineare Wandlerkennlinie aufweist, deren Kennliniensteilheit 
mit zunehmender Lichtstarke abnimmt . Ein solcher 
nichtlinearer optischer Sensor ist in der Lage, auch bei 
einer hohen Helligkeitsdynamik die Szene des Fahrzeugsitzes 
mit hoher Auflosung auf zunehmen, wobei fur die Szenenaus- 
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leuchtung eine nur wenig aufwendige Lichtquelle erforderlich 
ist . 

Vorteilhafte Weiterbildungen der Erfindung gehen aus den 
Unteranspruchen hervor . 

Besonders geeignet zur Aufnahme von Szenen mit sehr hoher 
Helligkeitsdynamik sind optische Sensoren, deren Wandler- 
kennlinie einen logarithmischen Verlauf hat. 

Fur die Realisierung einer stereoskopischen 
Bildaufnahmeeinrichtung konnen entweder mit definiertem 
Abstand zueinander angeordnete optische Sensoren oder eine 
Stereooptik vorgesehen werden, die zwei urn einen definierten 
Abstand gegeneinander versetzte Bilder des Fahrzeugsitzes 
auf einem einzigen optischen Sensor abbildet. 

Vorzugsweise ist eine Lichtquelle zur Ausleuchtung der Szene 
des Fahrzeugsitzes vorhanden, die synchron mit der 
Aktivierung der Bildaufnahmeeinrichtung Licht ausstrahlt . 
ZweckmaSigerweise strahlt die Lichtquelle fur die 
Fahrzeuginsassen unsichtbares Licht im Inf rarotbereich aus. 
Um storendes Streulicht von der Bildaufnahmeeinrichtung 
fernzuhalten, ist vorzugsweise unmittelbar vor dem 
mindestens einen optischen Sensor ein Infrarot- 
Bandpassf ilter angeordnet , dessen DurchlaSbereich innerhalb 
des lichtempf indlichen Bereichs des optischen Sensors liegt. 

Zeichnung 

Anhand mehrerer in der Zeichnung dargestellter Ausfuh- 
rungsbeispiele wird nachfolgend die Erfindung naher erlau- 
tert . Es zeigen: 
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Figur 1 ein Fahrzeug mit einer stereoskopischen Bildaufnah- 
meeinrichtung, 

Figur 2 eine stereoskopische Bildauf nahmeeinrichtung mit 
zwei optischen Sensoren, 

Figur 3 eine stereoskopische Bildauf nahmeeinrichtung mit 
einem optischen Sensor, 

Figur 4 eine nicht lineare Wandlerkennlinie eines optischen 
Sensors, 

Figur 5a eine Tiefenkarte eines nicht belegten Fahrzeug- 
sitzes und 

Figur 5b eine Tiefenkarte eines belegten Fahrzeugsitzes . 
Beschreibung von Ausf iihrungsbei spiel en 

In der Figur 1 ist schematisch ein Fahrzeug 1 mit einem 
Fahrzeugsitz 2, beispielsweise einem Beif ahrersitz , darge- 
stellt. Im Bereich des Dachhimmels des Fahrzeugs 1 ist eine 
stereoskopische Bildauf nahmeeinrichtung, bestehend aus zwei 
optischen Sensoren 3 und 4, angeordnet, mit der die Szene 
des Fahrzeugsitzes 2 aufgenommen wird. Die beiden optischen 
Sensoren 3 und 4 nehmen zwei um einen def inierten Ab stand 
gegeneinander versetzte, in der Zeichnung durch strichlierte 
Begrenzungslinien angedeutete Bildausschnitte auf . Die 
beiden Bildausschnitte bilden einen Uberlappungsbereich 5 
(schraf f ierter Bereich) , der genau den Raum des 
Fahrzeugsitzes abdeckt, in dem sich eine Person oder ein 
anderes Objekt auf dem Fahrzeugsitz aufhalten kann. Mit ei- 
ner solchen stereoskopischen Bildauf nahmeeinrichtung kann 
man, wie aus der DE 197 41 393 Al hervorgeht, mit Hilfe be- 
kannter Triangulationsverf ahren die Abstande von 
Bildausschnitten gegenuber einem Ref erenzpunkt (z. B. Ort 
der optischen Sensoren oder Ort der Airbagabdeckung) 
ermitteln. 
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Die in Figur 2 dargestellte stereoskopische 
Bildaufnahmeeinrichtung besteht, wie auch in Figur 1 
gezeigt, aus zwei in einem definierten Abstand zueinander 
angeordneten optischen Sensoren 3 und 4. Fur eine geeignete 
Strahlf ormung sind vor den optischen Sensoren 3 und 4 Linsen 
6 und 7 angeordnet . Die Ausgangssignale der beiden optischen 
Sensoren 3 und 4 werden einem Bildverarbeitungsprozessor 8 
zugefuhrt, der, wie noch im . Zusammenhang mit den Figuren 5a 
und 5b naher erlautert wird, aus den auf genommenen Bildern 
eine Tiefenkarte vom Fahrzeugsitz ableitet und die sich 
daraus ergebende Sitzbelegung iiber ein Ausgangs signal 9 
einem nicht dargestellten Steuergerat fur 

Ruckhalteeinrichtungen mitteilt. Das Steuergerat kann dann 
entsprechend der Information 9 die Auslosung eines oder 
mehrerer Airbags und Gurt straff er steuern. 

Es ist eine Lichtguelle 10 vorgesehen, welche die Szene des 
Fahrzeugsitzes ausleuchtet. Die Lichtquelle 10 besitzt z. B. 
mehrere Inf rarotlicht abstrahlende Leuchtdioden 11. Der 
Bildverarbeitungsprozessor 8 schaltet die Lichtquelle 10 
synchron mit den Bildsensoren 3 und 4 ein. Die Lichtquelle 
10 ist also nur dann aktiv, wenn die optischen Sensoren 3 
und 4 fur eine Bildaufnahme eingeschaltet sind. Somit la£t 
sich die mittlere abgestrahlte Lichtleistung moglichst ge- 
ring halten, wobei zum Auf nahmezeitpunkt die Szene mit aus- 
reichender Helligkeit ausgeleuchtet ist. Die Aufnahme von 
Storstrahlung durch die optischen Sensoren 3 und 4 kann da- 
durch verhindert werden, da£ vor den Sensoren 3 und 4 ein 
Inf rarot-Bandpassf ilter 12 eingesetzt wird, das auf den von 
der Lichtquelle 10 abgegebenen Spektralbereich abgestimmt 
ist . 

Wie in der Figur 3 dargestellt, kann an Stelle von zwei op- 
tischen Sensoren auch nur ein einziger optischer Sensor 13 
eingesetzt werden, auf dem uber eine Stereooptik 2 um einen 
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def inierten Abstand gegeneinander versetzte Bilder des 
Fahrzeugsitzes abgebildet werden. Die Stereooptik weist zwei 
Strahlengange mit darin angeordneten Umlenkelementen 15, 16 
und 17 auf , wobei an den Eingangen der Stereooptik Linsen 18 
und 19 angeordnet sind. Die von den beiden gegeneinander 
versetzten Strahlengangen der Stereooptik auf genommenen 
Strahlen treffen im optischen Sensor 13 auf nebeneinander 
liegende getrennte Sensorzonen. Ein Sensor nimmt hier also 
zwei Bilder auf, die genau so wie bei dem 
Ausfuhrungsbeispiel gemaS Figur 2 in dem 
Bildverarbeitungsprozessor 8 ausgewertet werden. 

Die optischen Sensoren 3, 4, 13 haben eine in Figur 4 dar- 
gestellte Wandlerkennlinie, welche den Zusammenhang zwischen 
der einfallenden Lichtstarke L und dem elektrischen 
Ausgangs signal (Spannung U oder Strom I) beschreibt . Die 
Wandlerkennlinie hat einen derartigen nichtlinearen Verlauf , 
da£ mit zunehmender Lichtstarke ihre Kennliniensteilheit 
abnimmt . Ein optischer Sensor mit einer solchen nicht- 
linearen Wandlerkennlinie ist aus der DE 42 09 536 C2 be- 
kannt . Wegen des nichtlinearen Verlaufs der Wandlerkennlinie 
wandeln die optischen Sensoren 3, 4, 13 Lichtsignale mit 
hoher Helligkeitsdynamik in eine reduzierte Ausgangs - 
signaldynamik urn. Dadurch wird der Kontrast der optischen 
Sensoren 3, 4, 13 nahezu unabhangig von der Be- 
leuchtungs starke konstant . Mit solchen optischen Sensoren, 
die eine nichtlineare, vorzugsweise logarithmische , Wand- 
lerkennlinie haben, ist selbst bei hohen Lichtintensit&ts- 
schwankungen eine hochauf losende Aufnahme der Szene des 
Fahrzeugsitzes moglich. 

Im oberen Teil der Figur 5a ist ein von der Bildauf nahme- 
einrichtung auf genommener Bildausschnitt 2 0 des Fahrzeug- 
sitzes 2 dargestellt. Darunter ist eine von dem Bildverar- 
beitungsprozessor 8 aus den beiden auf genommenen Bildern 



WO 00/29262 



- 8 - 



PCT/DE99/03111 



abgeleitete Tiefenkarte 21 dargestellt- In dieser Tiefen- 
karte 21 ist der gesamte Bildausschnitt in mehrere Zonen 
auf geteilt . Den Zonen sind Zahlen zugeordnet , welche den 
Abstand der betreffenden Bildzone gegentiber einem Referenz- 
punkt angeben. Je grower der Zahlenwert ist, desto weiter 
ist der Abstand der betreffenden Bildzone vom Ref erenzpunkt 
entfernt. Beispielsweise hat die Zone 22 einen Abstandswert 
von 76. Manche Zonen sind deshalb nicht mit einer Zahl 
versehen, weil der Bildverbeitungsprozessor hierfur keinen 
eindeutigen Abstandswert ermitteln konnte . 

Im oberen Teil der Figur 5b ist ein Bildausschnitt 23 des 
mit einer Person 24 belegten Fahrzeugsitzes 2 dargestellt. 
Darunter ist die von dem Bildverarbeitungsprozessor 8 
ermittelte Tiefenkarte 25. Ein Vergleich der Tiefenkarte 21 
des nicht belegten Fahrzeugsitzes mit der Tiefenkarte 25 des 
belegten Fahrzeugsitzes macht deutlich, daS mit der 
beschriebenen Bildauf nahmeeinrichtung eine eindeutige 
Information uber die Sitzposition einer den Fahrzeugsitz 
belegenden Person gewonnen werden kann. Die Tiefenkarte gibt 
auch eindeutige Information daruber, ob der Sitz uberhaupt 
belegt ist, ob sich auf ihm ein Kindersitz befindet, ob es 
sich urn eine kleine oder gro£e Person auf dem Fahrzeugsitz 
handelt oder ob der Fahrzeugsitz gar nicht mit einem 
Kindersitz oder einer Person besetzt ist, sondern ob ein 
anderer Gegenstand auf ihm abgelegt ist. 
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Patentanspruche 

1 . Vorrichtung zum Erfassen der Belegung eines Fahrzeugsit- 
zes, wobei eine stereoskopische Bildauf nahmeeinrichtung mit 
mindestens einem optischen Sensor (3, 4, 13) die Szene des 
Fahrzeugsitzes (2) aufnimmt und daraus eine in mehrere Zonen 
aufgeteilte Tiefenkarte (21, 25) ableitet, die fur jede Zone 
den Abstand gegemiber einem Ref erenzpunkt angibt , dadurch 
gekennzeichnet , da£ der mindestens eine optische Sensor (3, 
4, 13) eine den Zusammenhang zwischen der einfallenden 
Lichtstarke (L) und seinem elektrischen Ausgangssignal (U, 

I) beschreibende, nichtlineare Wandlerkennlinie aufweist, 
deren Kennliniensteilheit „mit zunehmender Lichtstarke_ (L) 
abnimmt . 

2. Vorrichtung nach . Anspruch 1, dadurch gekennzeichnet , daS 
die Wandlerkennlinie einen logarithmischen Verlauf hat. 

3. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, daS 
zwei mit def iniertem Abstand zueinander angeordnete optische 
Sensoren (3, 4,) gleichzeitig die Szene des Fahrzeugsitzes 

( 2 ) auf nehmen . 
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4. Vorrichtung nach Anspmch 1, dadurch gekennzeichnet , daS 
eine Stereooptik (14) zwei um einen definierten Abstand 
gegeneinander versetzte Bilder des Fahrzeugsitzes (2) auf 
einem einzigen optischen Sensor (13) abbildet. 

5. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, da£ 
eine Lichtquelle (10) zur Ausleuchtung der Szene des 
Fahrzeugsitzes (2) vorhanden ist, die synchron mit der 
Aktivierung der Bildauf nahmeeinrichtung (3, 4, 13) Licht 
ausstrahlt . 

6. Vorrichtung nach Anspruch 5, da£ die Lichtquelle (10) 
Licht im Inf rarotbereich ausstrahlt. 

7. Vorrichtung nach den Anspriichen 1, 5 und 6 dadurch 
gekennzeichnet , daS vor dem mindestens einen optischen 
Sensor (3, 4, 13) ein Inf rarot-Bandpassf ilter (12) 
angeordnet ist . 
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